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Abstract of DE4331772 

In the device proposed for recognising the 
colour of objects located in the bowls of blister 
films 1, in particular tablets, the light originating 
from an infrared transillumination unit 5 and 
passing through the blister film is registered by 
a black and white camera 15 having an 
infrared pass filter 17 placed in front of it and 
the light from a vertical illumination unit 7, 
which light is reflected from the blister film 
having the tablets, is registered by a colour 
camera 1 1 of the same imaging scale with an 
infrared blocking filter 13 arranged in front of it. 
Both the image contents are processed 
together in such a way that the outlines, 
supplied by the black and white camera, of the 
shadow images of the tablets define the region 
in which the image content of the colour 
camera is evaluated. In this way, a reliable 
determination of the presence and the correct 
colour or colour distribution of the tablets 
located in the blister bowls is achieved. 
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Prufungsantrag gem. § 44 PatG ist gestellt 

© Vorrichtung zur Farberkennung von in Blisterfolien liegenden Objekten 

© In der vorgeschlegenen Vorrichtung zur Farberkennung 
von in den Napfen von Blisterfolien 1 liegenden Objekten, 
insbesondere Pillen, wird das von einer Infrarot-Durchlicht- 
beleuchtungseinheit 5 ausgehende und durch die Blisterfolie 
durchtretende Licht von einer SchwarzweiBkamera 15 mit 
vorgeschaltetem InfrarotdurchlaBfilter 17 erfaBt und das von 
der Blisterfolie mit den Pillen reflektierte Licht einer Auf licht- 
beleuchtungseinheit 7 von einer Farbkamera 11 gteichen 
AbbiidungsmaBstabs mit vorgeschaltetem Infra rots perrfiiter 
13 erfaBt. 

Beide Bildinhalte werden zusammen in der Weise verarbet- 
tet, daB die von der SchwarzwelSkamera gelieferten Umris- 
se der Schattenbilder der Pillen die Bereich definierten, in 
denen der Bildinhalt der Farbkamera ausgewertet wird. Auf 
_ diese Weise gelingt eine zuverlassige Feststellung der 
^ Anwesenheit und der richtigen Farbe bzw. Farbverteilung 
der in den BlisternSpfen liegenden Pillen. 




Die fotgenden Angaben sind den vom Anmelder eingereichten Unterlagen entnommen 
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Beschreibung 

Die vorliegende Erfindung bezieht sich auf eine Vor- 
richtung zur Farberkennung von in den Napfen von 
Blisterfolien Hegenden Objekten, namlich insbesondere 5 
von Tabletten oder Pillen, deren Farbe ein Kennzeichen 
darstellt und die auf ihre richtige Anwesenheit und/oder 
Verteilung in der Kunststoff-Blisterfolie kontrolliert 
werden mtlssen, bevor die Blisterfolie durch Aufschwei- 
Ben einer anderen Folie, z. B. einer Aluminium- Durch- 10 
drilckfoiie versiegelt wird. 

Die Farberkennung von Tabletten setzt die Beleuch- 
tung derselben durch von oben auftreffendes Auflicht 
und Erfassung des von ihnen reflektierten Lichtstroms 
voraus. Der Lichtstrom wird in seine Komponenten 15 
Rot-Grun-Blau zerlegt und die in diesen drei Signalk- 
analen gewonnenen Pegei ermoglichen die Farberken- 
nung. 

Wesentlich ist, daB die Vorrichtung die zu erkennen- 
den Objekte findet und als wichtigen Bildinhalt abtrennt 20 
vom unwichtigen Bildinhalt, namlich der Blisterfolie. 
Dieser Vorgang wird Segmentierung genannt Er ist 
dann unproblematisch, wenn sich die Objekte bezuglich 
ihrer Farbe und/oder ihres Reflexionsverhaltens erheb- 
lich von der Blisterfolie unterscheiden. Dann bereitet 25 
die Trennung des wichtigen Bildinhalts vom unwichti- 
gen keine Schwierigkeiten, da zwischen beiden ein aus- 
reichender Farb- oder Helligkeitskontrast gegeben ist 

Helle und deshalb stark reflektierende Tabletten kon- 
nen zuverlassig unterschieden werden von einer dunk- 30 
len Blisterfolie oder einer durchsichtigen Blisterfolie, die 
sich tiber einen dunklen Untergrund bewegt Gleiches 
gilt naturlich auch bei umgekehrter Verteilung der Hel- 
ligkeit sowie wenn sich die Farben und damit die Vertei- 
lung der Pegel in den drei Grundfarbkanalen erheblich 35 
unterscheiden. 

Problematisch wird die Farberkennung der Objekte, 
wenn diese in den Napfen einer undurchsichtigen Bli- 
sterfolie liegen, deren Farbe der der Objekte ahnlich ist 
Es werden dann die Anforderungen an die GleichmaBig- 40 
keit der Auflichtbeleuchtung sehr hoch und selbst bei 
befriedigender Erfullung dieser Forderung wird die 
Farberkennung unzuverlassig. Wenn der Kontrast zwi- 
schen wichtigem und unwichtigem Bildinhalt nur noch 
wenige % betragt, kann die Segmentierung der Bildin- 45 
formation, d.h. die Abtrennung des wichtigen Bildin- 
halts unmdglich werden. WeiBe Tabletten in einer un- 
durchsichtig-weiBen Blisterfolie oder auch rote Tablet- 
ten in einer undurchsichtig-roten Blisterfolie lassen sich 
kaum erfassen. 50 

Die vorstehend beschriebenen Schwierigkeiten tre- 
ten auch dann auf, wenn der in die Grundfarben Rot- 
Griin-Blau zerlegte Bildinhalt, namlich der Farbraum 
RGB, durch eine bekannte nichtlineare Transformation 
umgesetzt wird in den Farbraum HIS, wobei H fur Hue, 55 
d. h. Farbton steht, I fUr Intensity bzw. Helligkeit oder 
Luminanz und S fQr Saturation oder Farbsattigung. Bei 
einer solchen Signal- Verarbeitung, die dem menschli- 
chen Empfinden nachgebildet ist, werden nicht nur dif- 
fus reflektierende Blisterfolien, sondern auch spiegelnde 60 
Hintergriinde, z. B. Aluminiumblisterfolien akzeptiert; 
dennoch bleibt auch hier ein ausreichender Kontrast 
zwischen den Objekten und dem Blisterfolien-Hinter- 
grund unabdingbar. 

An sich kann die Anwesenheit von Tabletten in Bli- 65 
sterfolien auch bei fehlendem Kontrast zwischen den 
Tabletten als zu erkennenden Objekten und dem Mate- 
rial der Blisterfolie kontrolliert werden, namlich mittels 
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einer Infrarot-Durchlichtbeleuchtung. 

Es ist bekannt, daB infrarotes Licht nahezu alle vor- 
kommenden Blisterfolien mit Ausnahme von Alumini- 
um durchdringt und deshalb mittels einer Durchlichtbe- 
leuchtung nahezu ideale Kontrastvoraussetzungen fOr 
die Erkennung der Anwesenheit oder des Zustands 
(Bruch) von Tabletten erzielt werden. Die Anordnung 
von Infrarot-DurchlaBfiltern vor der Kamera macht ei- 
ne solche Anordnung noch zusStzlich unempfindlich ge- 
geniiber Umgebungslicht Eine Farberkennung wird 
hiermit jedoch nicht bewirkt 

Aufgabe der vorliegenden Erfmdung ist die Schaff ung 
einer Vorrichtung zur Farberkennung von in den Nap- 
fen von Blisterfolien liegenden Objekten, die auch bei 
schwachem oder fehlendem Kontrast zwischen den Ob- 
jekten und dem Material der Blisterfolie zuverlassig ar- 
beitet 

Die Losung der gestellten Aufgabe ergibt sich aus den 
Patentanspriichen. 

Die Erfindung wird nachfolgend durch die Beschrei- 
bung eines AusfUhrungsbeispiels an Hand der beigege- 
benen Zeichnungen weiter erlautert Es zeigt 

Fig. 1 schematisch den Aufbau einer Vorrichtung der 
erfindungsgem&Ben Art; 

Fig. 2 schematisch den Weg der Signalverarbeitung 
und Entscheidungsfindung. 

Eine Blisterfolie 1 mit in ihr ausgeformten und Pillen 
bestimmter Farbe — eine Blisterpackung muB ggfs. ver- 
schiedenf arbige Pillen in bestimmter Anordnung enthal- 
ten — aufnehmenden Napfen bewegt sich unterhalb 
einer Kameraanordnung 3 und oberhalb einer Infrarot- 
Durchlichtbeleuchtungseinheit 5 Qber diese hinweg. Mit 
Abstand oberhalb der Blisterfolie 1 ist eine Auflichtbe- 
leuchtungseinheit 7 angeordnet, die den Strahlengang 
der Kameraanordnung 3 konzentrisch umgibt Beide 
Beleuchtungseinheiten erzeugen Lichtblitze, die gleich- 
zeitig ausgelost werden. 

Die Kameraanordnung 3 besteht aus einem halb- 
durchlassigen Spiegel 9, der den von der Infrarot- 
Durchlichtbeleuchtungseinheit 5 stammenden und 
durch die Blisterfolie 1 durchgetretenen Lichtstrom so- 
wie den von der Auflichtbeleuchtungseinheit 7 stamm- 
enden und von der Blisterfolie 1 reflektierten Licht- 
strom zum Teil durchiaBt zu einer Farbkamera 11 mit 
vorgeschaltetem Infrarotsperrfilter 13 und zum Teil re- 
flektiert zu einer SchwarzweiBkamera 15 mit vorge- 
schaltetem InfrarotdurchlaBFilter 17. 

Beide Kameras haben den gleichen AbbildungsmaB- 
stab und ihre Bildinhalte werden uberlagert Die 
SchwarzweiBkamera 15 erf aBt den durch die Blisterfolie 
1 durchgetretenen und nur von den Pillen unterbroche- 
nen und deshalb deren Umrisse randscharf wiederge- 
benden Infrarotlichtstrom. Dadurch werden schatten- 
bildartig die Bereiche des Bildinhalts definiert, die von 
der Farbkamera auf Obereinstimmung mit der Sollver- 
teilung von Farben zu kontrollieren sind. Ein vdlliges 
Fehlen von Pillen oder eine NapffQllung mit nur Pillen- 
bruchstucken wird, wie bekannt, von der SchwarzweiB- 
kamera erkannt und fiihrt zur Aussonderung; die zutref- 
fende Verteilung der Pillen nach Farbe wird von der 
Farbkamera kontrolliert, wobei zuverlassig nur die Be- 
reiche erf aBt werden, an denen sich die Pillen tatsachlich 
befinden. 

Bei einem lernfahigen System genOgt die Abspeiche- 
rung der Bilder eines richtig gefOllten Muster-Blisters, 
um anschlieBend durch Vergleich der Bilder der laufen- 
den Blisterfolien mit den gespeicherten Bildern die ein- 
wandfrei und richtig gefiillten Blister durchzulassen und 
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die fehlerhaften auszusondern. 

Dies geschieht beispielsweise durch Anlegen eines 
Histogrammes der Pegelverteilung Qber das segmen- 
tierte Objekt Das Maximum des Histogramms zeigt auf 
die Farbe. Es wird ein Pegelbereich um dieses Maximum 5 
berechnet Alle Pegel, die spater innerhalb dieses Pegel- 
bereiches in den drei KanaJen liegen, werden als richtige 
Farbe definiert 

Vorteile dieser Anordnung: 

10 

— Idealer Segmentierungskontrast, da unabhangig 
vom Farbkontrast oder Helligkeitskontrast 

— Farberkennung von Produkten, die die gleiche 
Farbe wie die Blisterfolie haben, wird mogiich. 

— Sehr gute Brucherkennung des Systems, da Grd- 15 
Be der Objekte durch Schattenbild. 

-- Farberkennung und Brucherkennung sind paral- 
lel angeordnet, so daB eine Unterscheidung zwi- 
schen einem leeren Napf und einem mit einer fal- 
schen Farbe gefUllten Napf gegeben ist 20 

Fig. 2 zeigt ein Blockschaltbild einer mSglichen An- 
ordnung. Die SchwarzweiBkamera 15 und die Farbka- 
mera 11 erfassen das gleiche Bild: Das Schattenbild der 
SchwarzweiBkamera wird in einen binaren Bildspeicher 25 
25 abgelegt Das Farbbild wird in einem separaten Farb- 
Bildspeicher 21 abgelegt. Spezielle Hardware Bausteine 
oder Software Algorithmen durchsuchen den Bildspei- 
cher 25 nach Objekten. Beispielsweise werden fur das 
Objekt Ol die Koordinaten des kleinsten es umschlie- 30 
Benden Rechtecks XI, X2; Yl, Y2 gefundea Zusatzlich 
zu den Koordinaten werden die interessierenden Merk- 
male Flache, Umfang und gegebenenfalls weitere den 
Konturverlauf beschreibende Daten zu diesem Objekt 
gespeichert 35 

Die Koordinaten des umschlieBenden Rechtecks wer- 
den in den Bildspeicher 21 Obertragen und dienen dort 
dazu, den Ort des Objektes im Farbbild unabhangig 
vom Hintergrund einzugrenzen. 

Fur das Objekt Ol existiert aus einem Lernlauf eine 40 
"Look Up Tabelle" (LUT) oder ein Histogramm 27 als 
Hardware oder als Software, welches die Sollfarbe(n) 
beschreibt und diese liefert die Entscheidung, ob das 
Objekt Ol die richtige Farbe hat oder nicht. In dem 
Block Entscheidungsfindung 29 werden die Informatio- 45 
nen zu einem Ausgangssignal zusammengesetzL 

Mit der beschriebenen Anordnung ist also eine Un- 
terscheidung zwischen leerem Napf und falschf arbig ge- 
fulltem Napf problemlos mdgiich- Gleichfalls ist es mog- 
lich, im Falle einer falschen Farbe den Fehler weiter zu 50 
differenzieren: 

Durch ein mehrfaches Laden der LUT mit den ande- 
ren erlaubten Sollfarben und Abtasten dieser Farben 
laBt sich bestimmen, ob das Objekt eine Farbe hat, die 
fur dieses Produkt erlaubt ist, aber durch eine Vertau- 55 
schung an dem falschen Ort liegt. Ist dies nicht der Fall, 
so kann eindeutig auf ein fremdes Produkt im Napf 
geschlossen werden. 

Bezugszeichenliste 60 

I Blisterfolie 

3 Kameraanordnung 

5 Infrarot-Durchlichtbeleuchtungseinheit 

7 Auflichtbeleuchtungseinheit 65 

9 halbdurchlassiger Spiegel 

II Farbkamera 

13 Infrarotsperrfilter 
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15 SchwarzweiBkamera 
17 InfrarotdurchlaBfilter 

Patentansprflche 

1. Vorrichtung zur Farberkennung von in den Nap- 
fen von Blisterfolien (1) liegenden Objekten mit 
einer ein breites Spektrum sichtbaren Lichts erzeu- 
genden Auflichtbeleuchtungseinheit (7) und einer 
Farbkamera (11), die das von den Objekten reflek- 
tierte Licht der Auflichtbeleuchtungseinheit (7) er- 
faBt und der Weiterverarbeitung zuftihrt, gekenn- 
zeichnet durch eine zusatzliche, den Bildbereich 
von unten beaufschlagende Infrarot-Durchlichtbe- 
leuchtungseinheit (5), wobei der Farbkamera (11) 
ein Infrarotsperrfilter (13) vorgeschaltet ist und ei- 
ne SchwarzweiBkamera (15) mit vorgeschaltetem 
InfrarotdurchlaBfilter (17) den gleichen Bildbereich 
gleichzeitig erfaBt und deren die Umrisse der Ob- 
jekte definierender Bildinhalt mit dem Bildinhalt 
der Farbkamera (11) zusammengefuhrt wird und 
diese in der Weise weiterverarbeitet werden, daB 
die Farbbildinformationen innerhalb der Objekt- 
grenzen als Nutzsignale dienen. 

2. Vorrichtung nach Anspruch 1, gekennzeichnet 
durch einen oberhalb des Bildbereichs unter einem 
Winkel angeordneten halbdurchlassigen Spiegel 
(9), der den Strahlengang in zwei Lichtstrome auf- 
teilt, deren einer von der Farbkamera (11) und de- 
ren anderer von der SchwarzweiBkamera (15) er- 
faBt wird 

3. Vorrichtung nach Anspruchen 1 und/oder 2, da- 
durch gekennzeichnet, daB bei bewegten Blisterfo- 
lien die Beleuchtungseinheiten (5, 7) jeweils syn- 
chrone Lichtblitze erzeugen. 
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